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Beschreibung 

Verfahren und Anordnung zur Bestimmung spektraler 
Sprachcharakteristika in einer gesprochenen Aufierung 

5 

Die Erfindung betrifft ein Verfahren und eine Anordnung zur 
Bestimmung spektraler Sprachcharakteristika in einer 
gesprochenen Aufierung. 

10 Bei einer konkatenativen Sprachsynthese werden einzelne Laute 
aus Sprachdatenbanken zusammengesetzt . Urn dabei einen fur das 
menschliche Ohr natiirlich klingenden Sprachverlauf zu 
erhalten, sind Diskontinuitaten an den Punkten, wo die Laute 
zusammengesetzt werden (Kpnkatenationspunkte) zu vermeiden. 
15 Die Laute sind dabei insbesondere Phoneme einer Sprache oder 
eine Zusammenset zung mehrerer Phoneme. 

Eine Wavelet-Transformation ist aus [1] bekannt. Bei der 
Wavelet-Transformation ist durch ein Wavelet-Filter 
20 gewahrleistet, dafi jeweils ein Hochpafianteil und ein 

Tiefpafianteil einer nachf olgenden Transf ormationsstuf e ein 
Signal einer aktuellen Transf ormationsstuf e vollstandig 
wiederherstellen. Dabei erfolgt von einer 
Transf ormationsstuf e zur nachsten eine Reduktion der 
Auflosung des Hochpafianteils bzw. Tief pafianteils (engl. 
Fachbegriff: "Subsampling" ) . Insbesondere ist durch das 
Subsampling die Anzahl der Transf ormationsstuf en endlich. 



Die Aufgabe der Erfindung besteht darin, ein Verfahren und 
30 eine Anordnung zur Bestimmung spektraler 

Sprachcharakteristika anzugeben, mit deren Hilfe insbesondere 
eine natiirlich wirkende synthetische Sprachausgabe bestimmbar 
ist . 

35 Diese Aufgabe wird gemafi den Merkmalen der unabhangigen 
Patentanspriiche gelost . 
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Im Rahmen der Erfindung wird ein Verfahren angegeben zur 
Bestimmung spektraler Sprachcharakteristika in einer 
gesprochenen Auflerung. Dazu wird die gesprochenen Auflerung 
digitalisiert und einer Wavelet-Transformation unterzogen. 
Anhand unterschiedlicher Transf ormationsstuf en der Wavelet- 
Transformation werden die sprecherspezif ischen 
Charakteristika ermittelt. 

Dabei ist es insbesondere ein Vorteil, dafl bei der Wavelet- 
Transformation mittels eines Hochpaflf ilters und eines 
Tiefpaftf ilters die Aulierung aufgeteilt wird und 
unterschiedliche Hochpaflanteile bzw. Tiefpaflanteile 
verschiedener Transf ormationsstuf en sprecherspezif ische 
Charakteristika enthalten. 

Die einzelnen Hochpaflanteile bzw. Tiefpaflanteile 
verschiedener Trans f ormationsstuf en stehen fur vorgegebene 
sprecherspezif ische Charakteristika, wobei sowohl 
Hochpaflanteil als auch Tiefpaflanteil einer jeweiligen 
Transformationsstufe, also das jeweilige Charakteristikum, 
getrennt von anderen Charakteristika modifiziert werden kann. 
Setzt man bei der inversen Wavelet-Transformation aus den 
jeweiligen Hochpafl- und Tiefpaflanteilen der einzelnen 
Transformationsstufen wieder das urspriingliche Signal 
zusammen, so ist gewahrleistet , dafl genau das gewunschte 
Charakteristikum verandert worden ist. Es ist somit moglich 
bestimmte vorgegebene Eigenarten der Auflerung zu verandern, 
ohne dafl dadurch der Rest der Auflerung hftPinflnftt- wi r-H , 

Eine Ausgestaltung besteht darin, dafl vor der Wavelet- 
Transformation die Auiierung gefenstert, also eine vorgegebene 
Menge von Abtastwerten ausgeschnitten, und in den 
Frequenzbereich transf ormiert wird. Hierzu wird insbesondere 
eine Fast-Fourier-Transformation (FFT) angewandt. 



Eine weitere Ausgestaltung besteht darin, dafl ein 
Hochpaflanteil einer Transformationsstufe in einen Realteil 
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und einen Imaginarteil aufgeteilt wird. Der Hochpaiianteil der 
Wavelet-Transformation entspricht dem Dif f erenzsignal 
zwischen dem aktuellen Tief pafianteil und dem Tief pafianteil 
der vorhergehenden Transf ormationsstuf e . 

Insbesondere besteht eine Weiterbildung darin, die Zahl der 
durchzuf uhrenden Trans f ormationsstuf en der Wavelet- 
Transformation dadurch zu bestimmen, daft in der letzten 
Transf ormationsstuf e, die aus hintereinandergeschalteten 
Tiefpassen besteht, ein Gleichanteil der Aufierung enthalten 
ist. Dann ist das Signal als Ganzes darstellbar durch seine 
Wavelet-Koef f izienten . Dies entspricht der vollstandigen 
Transformation der Information des Signalausschni tt s in den 
Wavelet-Raum. 

Wird insbesondere nur der jeweilige Tiefpaftanteil weiter 
transf ormiert (mittels eines Hochpaft- und eines 
Tiefpaflf ilters) , so verbleibt als Hochpaiianteil einer 
Transf ormationsstuf e das Dif f erenzsignal , wie oben erlautert. 
Kumuliert man Dif f erenzsignale (Hochpaiianteile) uber die 
Transf ormationsstuf en, erhalt man in der letzten 
Transf ormationsstuf e als kumulierten Hochpaflanteil die 
Information der gesprochenen Aufierung ohne Gleichanteil. 

Im Rahmen einer zusatzlichen Weiterbildung sind die 
sprecherspezif ischen Charakteristika identif izierbar als: 

a) Grundf requenz : 

Die Schwingung des HochpaBanteils der ersten oder der 
zweiten Transf ormationsstuf e der Wavelet- 
Transformation laftt die Grundf requenz der Au/ierung 
erkennen. Die Grundf requenz zeigt an, ob der Sprecher 
ein Mann oder einen Frau ist. 



b) Form der spektralen Hilllkurve: 

Die spektrale Hullkurve enthalt Information liber eine 
Transferfunktion des Vokaltrakts bei der Artikulation . 
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In einem stimmhaf ten Bereich wird die spektrale 
Hullkurve von den Formanten dominiert. Der 
Hochpaflanteil einer hoheren Transf ormationsstuf e der 
Wavelet-Transformation enthalt diese spektrale 
Hullkurve . 

c) Spectral Tilt (Rauchigkeit ) : 

Die Rauchigkeit in einer Stimme wird als negative 
Steigung im Verlauf des vorletzten Tiefpalianteils 
sichtbar . 

Die sprecherspezif ischen Charakteristika a) bis c) sind bei 
der Sprachsynthese von grofier Bedeutung. Wie eingangs 
erwahnt, bedient man sich bei der konkatenativen 
Sprachsynthese groiier Mengen realgesprochener Aulierungen, aus 
denen Beispiellaute ausgeschnitten und spater zu einem neuen 
Wort zusammengesetzt werden { synthetisierte Sprache) . Dabei 
sind Diskontinuitaten zwischen zusammengeset zten Lauten von 
Nachteil, da diese vom menschlichen Ohr als unnaturlich 
wahrgenommen werden. Urn den Diskontinuitaten entgegenzuwirken 
ist es von Vorteil, direkt die perzeptiv relevanten Groflen zu 
erfassen und ggf. zu vergleiche und/oder einander anzupassen. 

Dies kann geschehen durch direkte Manipulation, indem ein 
Sprachlaut in mindestens einer seiner sprecherspezif ischen 
Charakteristika angepafit wird, so dafi er in dem akustischen 
Kontext der konkatenativ verkniipften Laute nicht als storend 

wahrgenommen wird. Auch ist es mo glich , die Au swahl eines 

passenden Lautes daran auszurichten, dafi sprecherspezif ische 
Charakteristika von zu verknupf enden Lauten moglichst gut 
zueinander passen, z.B. dafi den Lauten gleiche oder ahnliche 
Rauchigkeit zu eigen ist. 

Ein Vorteil der Erfindung besteht darin, dafj die spektrale 
Hullkurve den Artikulationstrakt des Sprechers widerspiegelt 
und nicht, wie z.B. ein Polstellenmodell , auf Formanten 
gestutzt ist. Weiterhin gehen bei der Wavelet-Transformation 
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als nichtparametrischer Darstellung keine Daten verloren, die 
Aufierung kann stets vollstandig rekonstruiert werden. Die aus 
den einzelnen Transf ormationsstuf en der Wavelet- 
Transformation hervorgehenden Daten sind linear voneinander 
unabhangig, konnen somit getrennt voneinander beeinfluflt und 
spater wieder zu der beeinfluftten Aufierung - verlustlos - 
zusammengeset zt werden. 



10 Weiterhin wird eine Anordnung zur Bestimmung spektraler 

Sprachcharakteristika angegeben, die eine Prozessoreinheit 
aufweist, die derart eingerichtet ist, dafi eine Aufterung 
digitalisierbar ist. Daraufhin wird die Aufierung einer 
Wavelet-Transformation unterzogen und anhand 
15 unterschiedlicher Transf ormationsstuf en werden 
sprecherspezif ische Charakteristika ermittelt . 

Diese Anordnung ist insbesondere geeignet zur Durchfiihrung 
des erf indungsgemaflen Verfahrens Oder einer seiner vorstehend 
20 erlauterten Weiterbildungen . 

Weiterbildungen der Erfindung ergeben sich auch aus den 
abhangigen Anspruchen. 



Ausf tihrungsbeispiele der Erfindung werden nachfolgend anhand 
der Zeichnung dargestellt und erlautert. 

Es zeigen 



30 Fig.l eine Wavelet-Funkt ion; 

Fig. 2 eine Wavelet-Funktion, unterteilt nach Realteil und 
Imaginarteil ; 

35 Fig. 3 eine kaskadierte Fil terstruktur , die die 

Transf ormat ions schr it te der Wave let -Trans format ion 
darstellt ; 
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Fig. 4 TiefpafJanteile unci Hochpafianteile unterschiedlicher 
Trans f ormat ions stu fen; 

Fig. 5 Schritte der konkatenativen Sprachsynthese . 



Fig.l zeigt eine Wavelet-Funktion, die bestimmt ist durch 




(1) , 



wobei 

f die Frequenz, 
a eine Standardabweichung und 
c eine vorgegebene Normierungskons tante 
bezeichnen . 



Insbesondere ist die Standardabweichung a bestimmt durch die 
vorgebbare Stelle des Sei tenbandminimums 101 in Fig.l. 

Fig. 2 zeigt eine Wavelet-Funktion mit einem Realteil gemaft 
Gleichung (1) und einer Hilbert-Transf ormierten H des 
Realteils als Imaginarteil . Die komplexe Wavelet-Funktion 
ergibt sich somit zu 



W - V( f ) + 1 • H{y( f )} ^ 

Die Konstante c aus Gleichung (1) wird verwendet, urn die 
komplexe Wavelet-Funktion zu normieren: 

00 

J *(f) ■ V(f) df = 1 (3 ), 

—00 



wobei *¥ die konjugiert komplexe Wavelet-Funktion bezeichnet. 
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Fig. 3 zeigt die kaskadierte Anwendung der Wavelet- 
Transformation. Ein Signal 301 wird sowohl durch einen 
Hochpafi HP1 302 als auch durch einen Tiefpafl TP1 305 
gefiltert. Dabei findet insbesondere ein Subsampling statt, 
d.h. die Anzahl der abzuspeichernden Werte wird pro Filter 
reduziert. Eine inverse Wavelet-Transformation gewahrleistet , 
daft aus dem Tiefpaftanteil TP1 305 und dem Hochpafianteil HP1 
304 wieder das ursprlingliche Signal 301 rekonstruierbar ist. 

Im Hochpafl HP1 302 wird getrennt nach Realteil Rel 303 und 
Imaginarteil Iml 304 gefiltert. 

Das Signal 310 nach dem Tief paftf ilter TP1 305 wird erneut 
15 sowohl durch einen Hochpaii HP2 306 als auch durch einen 

TiefpaB TP2 309 gefiltert. Der HochpaB HP2 306 umfattt wieder 
einen Realteil Re2 307 und einen Imaginarteil Im2 308. Das 
Signal nach der zweiten Transf ormationsstuf e 311 wird wieder 
gefiltert, usf. 



20 



30 



Geht man von einem ( FFT- transf ormierten) Kurzzeitspektrum mit 
256 Werten aus, so werden acht Transf ormationsschritte 
durchgefuhrt (Subsamplingrate : 1/2), bis das Signal aus dem 
letzten Tiefpafif ilter TP8 dem Gleichanteil entspricht. 

In Fig. 4 sind verschiedene Transf ormationsstuf en der Wavelet- 
Transformation, unterteilt nach TiefpaBanteilen (Figuren 4A, 

4C und 4E) und Hochpafianteilen (Figuren 4B, 4D und 4F) 

dargestellt . 



Aus dem Hochpaflanteil gemaft Fig.4B ist die Grundf requenz der 
gesprochenen Aufierung ersichtlich. Neben den Schwankungen in 
der Amplitude ist deutlich eine uberwiegende Periodizitat im 
wavelet-gef ilterten Spektrum zu erkennen, die Grundf requenz 
35 des Sprechers. Anhand der Grundf requenz ist es moglich, 
vorgegebene Aufterungen bei der Sprachsynthese einander 
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anzupassen oder passende AuBerungen aus einer Datenbank mit 
vorgegebene AuBerungen zu bestiirunen. 

Im Tief pafianteil von Fig.4C sind als ausgepragte Minima und 
5 Maxima die Formanten des Sprachsignalausschnitts (die Lange 
des Sprachsignalausschnitts entspricht in etwa der doppelten 
Grundf requenz ) dargestellt. Die Formanten reprasentieren 
Resonanzf requenzen im Vokaltrakt des Sprechers. Die deutliche 
Darstellbarkei t der Formanten ermoglicht eine Ahpassung 
10 und/oder Auswahl passender Lautbausteine bei der 
konkatenativen Sprachsynthese . 

Im Tief paftanteil der vorletzten Transf ormationsstuf e (bei 256 
Frequenzwerten im Originalsignal : TP7), kann die Rauchigkeit 
15 einer Stimme ermittelt werden. Der Abstieg des Kurvenverlauf s 
zwischen Maximum Mx und Minimum Mi kennzeichnet den Grad der 
Rauchigkeit . 

Die erwahnten drei sprecherspezif ischen Charakteristika sind 
20 somit identif iziert und konnen fur die Sprachsynthese gezielt 
beeinflufit werden. Dabei ist es insbesondere von Bedeutung, 
daft bei der inversen Wavelet-Transformation die Manipulation 
eines einzelnen sprecherspezif ischen Charakteristikums nur 
dieses beeinfluftt, die anderen perziptiv relevanten GroBen 
25 bleiben unberuhrt. Somit kann die Grundf requenz gezielt 

verstellt werden, ohne daft dadurch die Rauchigkeit der Stimme 
beeinfluftt wird. 





Eine andere Einsatzmoglichkeit besteht in der Auswahl eines 
30 geeigneten Lautabschnitts zur konkatenativen Verknupfung mit 
einem anderen Lautabschnitt , wobei beide Lautabschnitte 
urspriinglich von verschiedenen Sprechern in unterschiedlichen 
Kontexten auf genommen wurden. Mit Ermittlung spektraler 
Sprachcharakteristika kann ein geeigneter zu verkntipf ender 
35 Lautabschnitt gefunden werden, da mit den Charakteristika 
Kriterien bekannt sind, die einen Vergleich von 
Lautabschnitten untereinander und somit eine Auswahl des 
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passenden Lautabschnitts automatisch nach bestimmten Vorgaben 
ermoglichen. 

Fig. 5 zeigt Schritte einer konkatenativen Sprachsynthese . 
5 Eine Datenbank wird mit einer vorgegebenen Menge 

natiirlichgesprochener Sprache verschiedener Sprecher 
erstellt, wobei Lautabschnitte in der nattirlichgesprochenen 
Sprache identif iziert und abgespeichert werden. Es ergeben 
sich zahlreiche Reprasentanten fur die verschiedenen 
10 Lautabschnitte einer Sprache, auf die die Datenbank zugreifen 
kann. Die Lautabschnitte sind insbesondere Phoneme einer 
Sprache oder eine Aneinanderreihung solcher Phoneme. Je 
kleiner der Lautabschni t t , desto grofier sind die 
Moglichkeiten bei der Zusammensetzung neuer Worter. So umfaUt 
15 die deutsche Sprache eine vorgegebene Menge von ca. 40 

Phonemen, die zur Synthese nahezu aller Worter der Sprache 
ausreichen. Dabei sind unterschiedliche akustische Kontexte 
zu berucksichtigen, je nachdem, in welchem Wort das jeweilige 
Phonem auftritt. Nun ist es wichtig, die einzelnen Phoneme in 
20 den akustischen Kontext derart einzubetten, dafl 

Diskontinuitaten, die vom menschlichen Gehor als unnatiirlich 
und "synthetisch" empf unden werden, vermieden werden. Wie 
erwahnt stammen die Lautabschnitte von unterschiedlichen 
Sprechern und weisen somit verschiedene sprecherspezif ische 
Charakteristika auf. Urn eine moglichst natlirlich wirkende 
Auflerung zu synthetisieren, ist es wichtig, die 
Diskontinuitaten zu minimieren. Dies kann erfolgen durch 

Anpassung der identif izierbaren und modif izierbaren 

sprecherspezif ischen Charakteristika oder durch Auswahl 
30 passender Lautabschnitte aus der Datenbank, wobei ebenfalls 
die sprecherspezif ischen Charakteristika bei der Auswahl ein 
entscheidendes Hilfsmittel darstellen. 

In Fig. 5 sind beispielhaft zwei Laute A 507 und B 508 
35 dargestellt, die jeweils einzelne Lautabschnitte 505 bzw. 506 
aufweisen. Die Laute A 507 und B 508 stammen jeweils aus 
einer gesprochenen Auflerung, wobei der Laut A 507 deutlich 



GR 98 P 1695 



10 

vom Laut B 508 verschieden ist. Eine Trennlinie 509 zeigt an, 
wo cier Laut A 507 mit dem Laut B 508 verknupft werden soli. 
Im vorliegenden Fall sollen die ersten drei Lautabschni tte 
des Lautes A 507 mit den letzten drei Lautabschnitten des 
5 Lautes B 508 konkatenat iv verknupft werden, 

Es wird entlang der Trennlinie 509 ein zeitliches Dehnen oder 
Stauchen (vergleiche Pfeil 503) der auf einanderf olgenden 
Lautabschnitte durchgef iihrt , urn den diskontinuierlichen 
10 Eindruck am Obergang 509 zu vermindern. 



Eine Variante besteht in einem abrupten Obergang der entlang 
der Trennlinie 509 geteilten Laute. Dabei kommt es jedoch zu 
den erwahnten Diskontinuitaten, die das menschliche Gehor als 

15 storend wahrnimmt. Fugt man hingegen einen Laut C zusammen, 
daft die Lautabschnitte innerhalb eines Obergangsbereichs 501 
oder 502 berlicksichtigt werden, wobei ein spektrales 
Abstandsmaft zwischen zwei einander zuordenbaren 
Lautabschnitten in dem jeweiligen Obergangsbereich 501 oder 

20 502 angepafit wird ( allmahlicher Obergang zwischen den 

Lautabschnitten) . Als das Abstandsmaft herangezogen wird 
insbesondere im Wavelet-Raum der euklidische Abstand zwischen 
den in diesem Bereich relevanten Koef f izienten . 



25 
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Patentanspruche 

1. Verfahren zur Bestimmung spektraler Sprachcharakterist ika 
in einer gesprochenen AuiJerung, 

5 a) bei dem die Auiierung digitalisiert wird, 

b) bei dem die digitalisierte Auiierung einer Wavelet- 
Transformation unterzogen wird, 

c) bei dem anhand unterschiedlicher Trans formationsstuf en 
der Wavelet-Transformation die sprecherspezif ischen 

10 Charakteristika bestimmt werden. 

2. Verfahren nach Anspruch 1, 

bei dem vor der Wavelet-Transformation eine gefensterte 
Transformation der digitalisierten AuBerung in einen 
15 Frequenzbereich durchgefuhrt wird. 

3. Verfahren nach Anspruch 2, 

bei dem die Transformation in den Frequenzbereich mittels 
Fast -Fourier-Trans format ion durchgefuhrt wird. 

20 

4. Verfahren nach einem der vorhergehenden Anspruche, 
bei dem in jeder Stufe der Wavelet-Transformation ein 
Tiefpaftanteil und ein Hochpaflanteil eines zu 

trans formierenden Signals ermittelt werden. 

25 

5. Verfahren nach einem der vorhergehenden Anspruche, 
bei dem ein Hochpaftanteil nach einem Realteil und einem 

Imaqinarteil unterteilt wird. 

30 6. Verfahren nach einem der vorhergehenden Anspruche, 
bei dem die Wavelet-Transformation mehrere 
Transf ormationsstuf en umfaflt, wobei die letzte 
Transformationsstuf e einen Gleichanteil der Aufierung in 
einer der Anzahl Transf ormationsstuf en entsprechenden 

35 wiederholten Tief pa/if ilterung liefert. 
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7. Verfahren nach einem der vorhergehenclen Anspruche, 

bei dem die sprecherspezif ischen Charakteristika bestimmt 
sind durch: 

a) eine Grundf requenz der gesprochenen Auiierung; 
5 b) spektrale Hullkurve; 

c) einer Rauchigkeit der gesprochenen Auiierung. 

8. Verwendung des Verfahrens nach einem der Anspruche 1 bis 
7 zur Sprachsynthese, 

10 wobei einzelne sprecherspezif ische Charakteristika im 

Hinblick auf eine natiirlich klingende Aneinanderreihung 
von Sprachlauten angepaiit werden. 

9. Verwendung des Verfahrens nach einem der Anspruche 1 bis 
15 7 zur Sprachsynthese, 

wobei aus einer vorgegebenen Datenmenge diejenigen 
Sprachlaute anhand einzelner spektraler 
Sprachcharakteristika ausgewahlt werden, die eine 
natiirlich klingende Aneinanderreihung von Sprachlauten 
20 gewahrleisten. 



10. Anordnung zur Bestimmung spektraler Sprachcharakteristika 
in einer gesprochenen Auiierung 

mit einer Prozessoreinheit, die derart eingerichtet ist, 
dafl folgende Schritte durchftihrbar sind: " 
a) die Auiierung wird digi talisiert ; 

b) die digitalisierte Auiierung wird einer Wavelet- 

Transformation unter zogen; 
30 c) anhand unterschiedlicher Transf ormationss tuf en der 

Wavelet-Transformation werden die sprecherspezif ischen 
Charakteristika bestimmt. 
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Zusammenf as sung 

Verfahren und Anordnung zur Bestimmung spektraler 
Sprachcharakteristika in einer gesprochenen Auiierung 

5 

Es werden spektrale Sprachcharakteristika in einer 
naturlichsprachlichen Auiierung bestimmt, wobei die Auiierung 
digitalisiert und einer Wavelet-Transformation unterzogen 
wird. Aus den unterschiedlichen Transf ormationss tuf en der 

10 Wavelet-Transformation gehen die sprecherspezif ischen 

Charakteristika hervor. Diese Charakteristika konnen im 
Rahmen einer Sprachsynthese mit Charakteristika anderer 
Aufterungen verglichen werden, urn ein fur das menschliche Ohr 
kontinuierlich klingendes synthetisches Sprachsignal zu 

15 erzeugen. Alternativ konnen die Charakteristika auch gezielt 
verandert werden, urn einer perzeptiven Dissonanz 
entgegenzuwirken . 
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